Năm thứ 48 (1783), Phong được thăng làm Thái thường tự Thiếu khanh; lại được thăng làm Thông chánh tư Phó sứ. Sau đó Phong được ra làm Đốc Hồ Nam học chánh; ông giữ Công chánh, nên học trò rất nhiều.

Năm thứ 51 (1786), Phong mãn nhiệm, được lưu nhiệm. Nước lũ phá hoại tường thành Kinh Châu thuộc Hồ Bắc, thổ hào Hiếu Cảm giết dân đói; Càn Long Đế trách Phong ở tỉnh láng giềng mà không nói gì, giao xuống cho bộ nghị luận. Bấy giờ Phong còn đang xử lý vụ án học trò giấu tang để dự thi, còn có kẻ tham gia làm sách cấm. Đúng lúc nhà có tang, Phong bỏ về quê, giao vụ án lại cho Tuần phủ Phổ Lâm. Nhưng Phổ Lâm thừa cơ hặc Phong, khiến ông bị đề nghị đoạt chức; Càn Long Đế giáng ông nhận hàm Lục bộ Chủ sự.